賽靈思(Xilinx)的線上技術大會Xilinx Adapt 2021正式上線,同時推出多款針對AI應用開發所設計的新解決方案和矽智財(IP),以滿足軟硬體和AI開發者社群的需求。大會首週將關注軟硬體開發者並揭示相關重要消息,包括專為智慧視訊分析應用推出的完整軟體堆疊,以及針對UltraScale+和 Versal元件所推出擴展的視訊和成像IP產品組合。
賽靈思亦宣佈將再次與Hackster.io聯合舉辦自行調適運算設計挑戰賽。今年是第二屆比賽,Hackster.io擴大了比賽規模,並將頒發總計7萬美元的獎金給15名獲勝者,並贈送超過350套開發板。本屆挑戰賽還特別增設兩項大獎,旨在獎勵大學生和科技產業中女性人才的創新。相關競賽資訊將於本週的Xilinx Adapt 2021發表。
Xilinx Adapt 2021於美國時間9月7日至16日舉行,將有來自合作夥伴和客戶的主管發表主題演講,亦有超過100場演講、論壇、產品培訓和實驗室專案,協助使用者發揮自行調適運算的優勢。這場活動前三天的內容主要針對軟硬體開發者設計,最後三天則聚焦於賽靈思廣泛的終端應用市場,並提供航空航太、汽車、資料中心、工業、醫療以及有線和無線等業務領域的專場內容。
賽靈思AI及軟體行銷副總裁Ramine Roane表示,Xilinx Adapt 2021首週的活動旨在向新手和資深開發者介紹最新的開發環境與可用資源,以幫助他們更輕鬆地在賽靈思的平台上打造自己的應用。我們致力於協助開發者社群透過自行調適硬體加速應用,推動產業發展並對人們的生活產生正向影響。透過將廣受歡迎的領域專用框架與更廣泛使用的開源開發框架相連結,我們讓所有開發者都能獲益於自行調適平台的可編程能力。
賽靈思同時利用線上開發者大會的機會,發表了多款可加快AI應用開發的新工具及IP。在開發工具方面,該公司推出了新的Vitis Video Analytics SDK,可為賽靈思平台上的智慧影像分析應用提供完整的軟體堆疊,並於邊緣到雲端進行部署。端到端的視訊分析解決方案支援視訊解碼、預處理、AI推論、追蹤和後處理等功能,能夠滿足整體應用加速的需求。它支援被廣泛使用的AI模型,如YOLO、SSD、ResNet、Inception、RefindDet、ReID、FPN和OpenPose等,可實現即時物件偵測、分類和分割等。
Vitis Video Analytics SDK為視訊分析應用提供基礎層,例如瞭解智慧城市中的車輛和行人的交通模式、在醫院中執行健康與安全監測、在零售商店裡支援自助結帳和分析,或在製造工廠內檢測元件缺陷等。
另外,它還為開發者提供完整的框架,使其能夠借助基礎設施外掛程式、軟體加速函式庫,和一個能開發客製加速函式庫以控制客製化硬體加速器的介面進行創新。Vitis Video Analytics SDK建立於Xilinx Run Time(XRT)和各種Vitis AI 工具的複雜介面上並對其進行抽象,使開發者無需掌握有關XRT和Vitis AI工具的複雜技術,就能輕鬆打造視訊分析和轉碼視訊流。
在IP部分,為滿足工業機器視覺、智慧駕駛與智慧零售等應用領域所產生的新需求,賽靈思大幅擴展用於UltraScale+和Versal元件的視訊與成像IP產品組合。新推出的HDMI 2.1和DisplayPort(DP) 1.4,及8K訊號調適器和混合器IP,可協助客戶建立完整的端到端8K視訊流。為提供遊戲玩家沉浸式的遊戲體驗,目前賽靈思視訊和圖像產品組合包括高動態範圍(HDR)、高幀率和可變更新率(Variable Refresh Rate)等格式,並與UltraScale+和Versal系列產品自行調適同步。
視訊IP產品組合中的其他進階新功能,包括具水平和垂直梯形失真校正的4k60 Warp、鏡頭失真校正、旋轉和任意扭曲視訊牆、高階視訊會議鏡頭、投影機和汽車應用等。
賽靈思亦推出全面改版的Vitis Vision函式庫,提供給汽車、工業機器視覺和智慧攝影機應用的開發者使用,其中包括具有HDR的影像訊號處理器(ISP),以及針對具OpenCV API的機器學習(ML)神經網路有預處理與後處理的功能。
最後,即將發佈的Vivado 2021.2版本將在賽靈思Zynq UltraScale+ EV系列中支援4:4:4 YUV色彩空間。4:4:4色彩空間結合賽靈思HDMI、DP、視訊處理和視訊混合器IP, 並將廣播和專業音視訊遷移至標準化方法用於在IP網路上傳輸音視訊,為客戶提供完全保真的串流視訊。Vivado 2021.2版本預計將於2021年底推出。